INTRODUCCIÓN
El artículo 13 de la Norma para el Aseguramiento de la Calidad de la Información Estadística y Geográfica del Instituto Nacional de Estadística y Geografía (Norma) estipula que, para evaluar la calidad de la Información Estadística y Geográfica, las Unidades Administrativas, como mínimo, deberán calcular los indicadores de calidad y aplicar las metodologías de evaluación en los términos y periodicidad aprobados por el Comité. De acuerdo con el artículo 18 de la citada Norma, las Unidades Administrativas informarán al Comité los resultados de los indicadores y evaluaciones aplicados a los Procesos de Producción a su cargo, los cuales serán integrados en el Informe Anual de Resultados del Comité.
Considerando lo anterior y, para efectos de las atribuciones del Comité conforme al artículo 26 fracción IV de la Norma, se presenta la información del siguiente indicador de calidad.
1. MARCO DE REFERENCIA DEL INDICADOR
1.1 Nombre del indicador
Tasa de no respuesta a nivel variable.
1.2 Acuerdos del CoAC mediante los cuales fue aprobado el indicador:
Acuerdo CAC- 004/05/2021 en la cuarta sesión del 2021 del Comité de Aseguramiento de la Calidad.
1.3 Fecha de inicio para reportar el indicador:
Se calculará y reportará para todos los procesos de producción cuyo método de generación son censos:
a) Se reportará de acuerdo al calendario de difusión a partir del siguiente día de su aprobación,
b) El reporte se realizará en metadatos a más tardar a los 30 días naturales contados a partir de la publicación del proceso de producción,
c) Se deberá usar el formato definido por el Grupo de Trabajo.
a) Se reportará de acuerdo al calendario de difusión a partir del siguiente día de su aprobación,
b) El reporte se realizará en metadatos a más tardar a los 30 días naturales contados a partir de la publicación del proceso de producción,
c) Se deberá usar el formato definido por el Grupo de Trabajo.
1.4 Principio de la Política de Calidad Institucional que mide el indicador:
Veracidad (precisión y confiabilidad)
1.5 Uso previsto del indicador:
El uso del indicador es combinado.
De uso interno puede servir para retroalimentar a los responsables de los censos con el fin de reducir la no respuesta en la variable para la cual se calcula, además para analizar la conveniencia de usar métodos de imputación.
De uso externo para que los usuarios de la información pueden tomar las precauciones necesarias al usar la información de una variable en particular en caso de observar patrones que pudieran indicar la existencia de un sesgo a causa de la no respuesta.
Se propone que en un principio este indicador sólo sea de uso interno.
De uso interno puede servir para retroalimentar a los responsables de los censos con el fin de reducir la no respuesta en la variable para la cual se calcula, además para analizar la conveniencia de usar métodos de imputación.
De uso externo para que los usuarios de la información pueden tomar las precauciones necesarias al usar la información de una variable en particular en caso de observar patrones que pudieran indicar la existencia de un sesgo a causa de la no respuesta.
Se propone que en un principio este indicador sólo sea de uso interno.
1.6 Fuentes de la metodología y/o estándares utilizados en el cálculo del indicador:
• Eurostat. ESS handbook for quality reports. 2014. Páginas 125-126.
• United Nations Economic Commission for Europe (UNECE). Quality Indicators for the Generic Statistical Business. Process Model (GSBPM) - For Statistics derived from Surveys and Administrative Data Sources. 2017.
• The national archives (United Kingdom). Item non-response rate.
• United Nations Economic Commission for Europe (UNECE). Quality Indicators for the Generic Statistical Business. Process Model (GSBPM) - For Statistics derived from Surveys and Administrative Data Sources. 2017.
• The national archives (United Kingdom). Item non-response rate.
1.7 Persona(s) participante(s) en la integración de la ficha del indicador:
Unidad Administrativa o Grupo de trabajo.- Grupo de trabajo para la definición de indicadores de precisión para censos.
Nuria Torroja Mateu, directora de Aseguramiento de la Calidad. DGIAI.
Carole Odette Schmitz Basañez, directora general adjunta del Censo de Población y Vivienda. DGES.
Susana Patricia Pérez Cadena, directora general adjunta de Censos Económicos y Agropecuarios. DGEE.
José Guillermo Castillo Koschnick, director general adjunto de Políticas y Censos Nacionales de Gobierno. DGEGSPyJ.
Gerardo Barragán Romero, subdirector de evaluación de la calidad. DGIAI.
Nuria Torroja Mateu, directora de Aseguramiento de la Calidad. DGIAI.
Carole Odette Schmitz Basañez, directora general adjunta del Censo de Población y Vivienda. DGES.
Susana Patricia Pérez Cadena, directora general adjunta de Censos Económicos y Agropecuarios. DGEE.
José Guillermo Castillo Koschnick, director general adjunto de Políticas y Censos Nacionales de Gobierno. DGEGSPyJ.
Gerardo Barragán Romero, subdirector de evaluación de la calidad. DGIAI.
1.8 Medios de difusión:
Indicador interno (por el momento)
Red Nacional de Metadatos.
Interno. Sitio del Comité de Aseguramiento de la Calidad, Informe de Resultados del Comité de Aseguramiento de la Calidad.
Interno. Sitio Aseguramiento de la Calidad. Sistema de reporte de indicadores de precisión.
Red Nacional de Metadatos.
Interno. Sitio del Comité de Aseguramiento de la Calidad, Informe de Resultados del Comité de Aseguramiento de la Calidad.
Interno. Sitio Aseguramiento de la Calidad. Sistema de reporte de indicadores de precisión.
1.9 Fecha de integración de la ficha:
28/06/2021
2. ESPECIFICACIONES TÉCNICAS DEL INDICADOR
2.1 Ámbito de aplicación:
Censo.
2.2 Objetivo del indicador:
La no respuesta o existencia de valores perdidos está presente en todo proceso de producción de Información y puede inducir un sesgo en las estadísticas o indicadores que se generen a partir de la información. El objetivo principal de la tasa de no respuesta a nivel variable es tratar de identificar la existencia de patrones en la no respuesta en una variable en particular, para este fin, la tasa de no respuesta se debe calcular y comparar sobre los diferentes dominios de estudio o sobre agrupaciones de interés.
2.3 Periodicidad:
Se calculará según la periodicidad con la que se llevan a cabo los ciclos del proceso de producción.
2.4 Tiempo límite para el reporte del indicador:
Esta tasa se reportará y resguardará en el sistema de metadatos a más tardar en 30 días naturales a partir de la publicación del proceso de producción.
2.5 Periodo de referencia o ámbito de aplicación:
El periodo de referencia del indicador corresponde a aquel definido en la población objeto de estudio del proceso de producción.
2.6 Definiciones o conceptos relevantes:
I. Se deberán especificar los aspectos siguientes para cada proceso de producción:
i) La población objeto de estudio del proceso de producción.
ii) El conjunto de variables principales para las cuales se calculará el indicador.
iii) Las agrupaciones sobre las cuales se calculará el indicador (principales dominios de estudio o agrupaciones relacionadas con las variables principales del proceso de producción).
II. Para efectos de esta ficha se entenderá:
a. Dominio de Estudio: Subconjunto de la población para el cual se requiere realizar mediciones o representaciones de los conceptos de forma separada.
b. Población: El conjunto de unidades pertenecientes a un grupo de personas, empresas, establecimientos, viviendas, o cualquier otro tipo de objetos, acciones o eventos, con base en ciertas características bien definidas, incluyendo límites sobre tiempo y espacio.
c. Unidades de observación con información completa: Corresponde a aquellas unidades de observación que, al cierre del operativo de campo en la fase de captación, cuentan con información completa para las variables principales objetivo del levantamiento.
d. Unidades de observación sin información e incompletas: Corresponde a aquellas unidades de observación que tienen códigos de resultado de instrumentos de captación sin información levantada, o que no cuentan con información completa para las variables principales objetivo del levantamiento.
III. El total de las unidades de observación es el total de unidades con información completa.
IV. Este indicador se debe interpretar en conjunto y de forma adicional a la tasa de no respuesta a nivel unidad, pues esta última incluye aquellos casos en donde toda la unidad -incluyendo la información de la variable en cuestión- es considerada como no respuesta.
i) La población objeto de estudio del proceso de producción.
ii) El conjunto de variables principales para las cuales se calculará el indicador.
iii) Las agrupaciones sobre las cuales se calculará el indicador (principales dominios de estudio o agrupaciones relacionadas con las variables principales del proceso de producción).
II. Para efectos de esta ficha se entenderá:
a. Dominio de Estudio: Subconjunto de la población para el cual se requiere realizar mediciones o representaciones de los conceptos de forma separada.
b. Población: El conjunto de unidades pertenecientes a un grupo de personas, empresas, establecimientos, viviendas, o cualquier otro tipo de objetos, acciones o eventos, con base en ciertas características bien definidas, incluyendo límites sobre tiempo y espacio.
c. Unidades de observación con información completa: Corresponde a aquellas unidades de observación que, al cierre del operativo de campo en la fase de captación, cuentan con información completa para las variables principales objetivo del levantamiento.
d. Unidades de observación sin información e incompletas: Corresponde a aquellas unidades de observación que tienen códigos de resultado de instrumentos de captación sin información levantada, o que no cuentan con información completa para las variables principales objetivo del levantamiento.
III. El total de las unidades de observación es el total de unidades con información completa.
IV. Este indicador se debe interpretar en conjunto y de forma adicional a la tasa de no respuesta a nivel unidad, pues esta última incluye aquellos casos en donde toda la unidad -incluyendo la información de la variable en cuestión- es considerada como no respuesta.
2.7 Fórmula de cálculo:
Sea U el conjunto de todas las unidades de observación en el universo censal, que tienen información completa (que no fue imputada) para las variables principales objetivo del levantamiento.
Considerando una variable principal Z, sea Uz ⊆ U el conjunto de unidades en donde se requiere información de la variable Z. Entonces cada una de las unidades contenidas en UZ está en uno y sólo uno de los dos subconjuntos siguientes:
UZ1: unidades en donde existe un valor en la variable principal Z, diferente a códigos de no respuesta.
UZ2: unidades en donde no hay información de la variable principal Z o esta corresponde a códigos de no respuesta.
Para cada nivel de agregación g, g = 1,…,G, sea NZgi el número de unidades en UZ que pertenecen a g y al subconjunto UZi, i=1,2; se tiene que NZg = NZg1 + NZg2.
La tasa de no respuesta a nivel variable para la variable principal Z y para el nivel de agregación g, TNRZg, se define como:
Considerando una variable principal Z, sea Uz ⊆ U el conjunto de unidades en donde se requiere información de la variable Z. Entonces cada una de las unidades contenidas en UZ está en uno y sólo uno de los dos subconjuntos siguientes:
UZ1: unidades en donde existe un valor en la variable principal Z, diferente a códigos de no respuesta.
UZ2: unidades en donde no hay información de la variable principal Z o esta corresponde a códigos de no respuesta.
Para cada nivel de agregación g, g = 1,…,G, sea NZgi el número de unidades en UZ que pertenecen a g y al subconjunto UZi, i=1,2; se tiene que NZg = NZg1 + NZg2.
La tasa de no respuesta a nivel variable para la variable principal Z y para el nivel de agregación g, TNRZg, se define como:
2.8 Parámetro de interés
Porcentaje
2.9 Fuentes de información del indicador
Todos los datos se obtienen de las especificaciones del proceso de producción y de la información censal que son los insumos de éste.
2.10 Nivel de agregación
Las agrupaciones que defina el responsable del proceso de producción.
2.11 Observaciones y/o especificaciones técnicas
La tasa de no respuesta a nivel variable, para una variable principal en particular, se define como el cociente entre el número de unidades de observación con no respuesta a nivel variable y el total de las unidades de observación en el universo censal con información completa, multiplicado por 100.
I. Se deberán especificar los aspectos siguientes para cada proceso de producción:
i) La población objeto de estudio del proceso de producción.
ii) El conjunto de variables principales para las cuales se calculará el indicador.
iii) Las agrupaciones sobre las cuales se calculará el indicador (principales dominios de estudio o agrupaciones relacionadas con las variables principales del proceso de producción).
I. Se deberán especificar los aspectos siguientes para cada proceso de producción:
i) La población objeto de estudio del proceso de producción.
ii) El conjunto de variables principales para las cuales se calculará el indicador.
iii) Las agrupaciones sobre las cuales se calculará el indicador (principales dominios de estudio o agrupaciones relacionadas con las variables principales del proceso de producción).
2.12 Valores de referencia o estándar de calidad utilizado
No se adopta un valor de referencia, sin embargo, valores altos o la existencia de patrones entre las agrupaciones implican una revisión de la variable en los insumos.